Quý tần Dương thị không rõ tên thật, bà xuất thân danh môn Hoằng Nông Dương thị (弘農楊氏), một gia tộc có quan hệ với hoàng tộc nhà Tùy tại Hoằng Nông, Hoa Âm (nay là khu vực Hoa Âm, Thiểm Tây), đồng thời cũng là mẫu tộc của Võ Tắc Thiên. Mẹ của Võ Tắc Thiên là Vinh Quốc phu nhân Dương thị - chính là tổ cô mẫu của Dương Quý tần.

Tằng tổ phụ của Quý tần là Dương Đạt (楊達), làm quan từ thời nhà Tùy. Thời kì Võ Tắc Thiên, do Dương Đạt là mẫu tộc của Võ hậu, ông được truy tặng làm Trịnh vương (鄭王). Cha Dương Quý tần là Dương Tri Khánh (楊知慶), cháu gọi Vinh Quốc phu nhân là cô mẫu, làm tới chức Tả Thiên Ngưu tướng quân, sau tặng Thái úy, tước Trịnh quốc công (鄭國公). Trong nhà bà có ít nhất 2 người chị; một là phu nhân của Lễ châu Thứ sử, Quảng Bình quận công Lý Ngộ (李炅), con trai của Giang vương Lý Nguyên Tường (李元祥); người kia là chính phi của Thái tử Lý Trọng Tuấn, con của Đường Trung Tông Lý Hiển.